HumanTracker: Towards Comprehensive and Human-Aligned Motion Tracking Benchmark
HumanTracker：迈向全面且与人类对齐的运动跟踪基准
🧭 人形运动跟踪基准与偏好对齐评估
Nankai University · Tsinghua University · Galbot · Shanghai Jiao Tong University · Peking University
构建153小时运动跟踪基准与偏好对齐的HumanScore指标，更符合人类感知并揭示接触/稳定性故障
📌 工作参考价值（4 点）
- 离线评估别再只看 log-likelihood：用成对偏好数据训练 reward model 作为生成式推荐/搜索改写/文案生成的自动评估指标，尤其要加入业务约束违规信号（相关性、时效、价格带等）。
- 构建诊断型 benchmark 时按场景/意图分层（类似论文四个 motion families），例如按导购、比价、冲动消费分层统计，便于定位 Agent 决策在哪些场景崩。
- 使用时序 Transformer 对整段 session/轨迹打分，而不是逐 item 独立打分：在会话推荐或 Agent 多步工具调用评估里，直接输出 session 级 reward，可捕捉上下文一致性和长期目标达成。
- 物理/业务约束显式建模：在生成式选品或文案生成后增加 constraint checker（如库存、毛利、合规），与 reward model 联合过滤，避免只看 soft metric。